وزن دهی بهینه به سؤال ها و خرده آزمون های ورودی برای ساخت نمره کل ترکیبی

نویسندگان

سلیمان ذوالفقارنسب

کارشناس ارشد پژوهشی مرکز تحقیقات، ارزشیابی، اعنبارسنجی و تضمین کیفیت آموزش عالی سازمان سنجش آموزش کشور ابراهیم خدایی

دانشیار دانشگاه تهران غلامرضا یادگارزاده

عضو هیأت علمی سازمان سنجش آموزش کشور

چکیده

این تحقیق به منظور وزن دهی بهینه به خرده آزمون ها و سؤال های آزمون سراسری برای ساخت نمره کل ترکیبی انجام شده است. هدف نهایی این تحقیق پایین آوردن خطای اندازه گیری نمره کل ترکیبی بر اساس نظریه کلاسیک آزمون سازی بود. وزن دهی در سه سطح صورت گرفته است نخست آزمون سی سؤالی چهارگزینه ای حساب دیفرانسیل که نمونه آن 3409 نفر بود بر اساس وزن دهی در سطح گزینه های سؤال (درصد محبوبیت گزینه ها، نمره فرمولی) و در سطح سؤال (سرجمع ساده بدون وزن یا وزن مؤثر سؤال، وزن عاملی سؤال و وزن دشواری سؤال) وزن دهی شده اند. همچنین در سطح خرده آزمون یک مجموعه آزمون سراسری دستیاری پزشکی با پنج خرده آزمون با طول برابر شش سؤال که نمونه آن 3572 نفر بود نیز به روش های مختلف (متوسط ضریب همبستگی پیرسون، وزن عاملی و ضرایب رگرسیون) وزن دهی شده اند. به علاوه یک مجموعه آزمون دستیاری پزشکی دیگر با طول خرده آزمون های نابرابر به ترتیب 45، 26، 24، 6 و 6 سؤال که در بین گروه 3638 نفری اجرا شده بر اساس وزن مؤثر خود خرده آزمون ها (بدون وزن) مورد بررسی قرار گرفته است. این تحقیق نشان داد که روش نمره فرمولی بیشترین واریانس خطا را نسبت به دیگر روش ها تولید می کند. تنها وزن دهی بر اساس دشواری سؤال می تواند رتبه بندی افراد را به نفع افراد شایسته تر تغییر دهد و دیگر روش های وزن دهی برای افزایش پایایی رضایت بخش نیستند و ضریب پایایی آزمون در همان ابتدا تحت تأثیر سؤال های خوب و خرده آزمون های خوش ساخت با طول بهینه است.

برای دانلود باید عضویت طلایی داشته باشید

برای دانلود متن کامل این مقاله و بیش از 32 میلیون مقاله دیگر ابتدا ثبت نام کنید

اگر عضو سایت هستید لطفا وارد حساب کاربری خود شوید

منابع مشابه

وزن‌دهی بهینه به سؤال‌ها و خرده آزمون‌های ورودی برای ساخت نمره کل ترکیبی

این تحقیق به منظور وزن‌دهی بهینه به خرده آزمون‌ها و سؤال‌های آزمون سراسری برای ساخت نمره کل ترکیبی انجام شده است. هدف نهایی این تحقیق پایین آوردن خطای اندازه‌گیری نمره کل ترکیبی بر اساس نظریه کلاسیک آزمون‌سازی بود. وزن‌دهی در سه سطح صورت گرفته است نخست آزمون سی سؤالی چهارگزینه‌ای حساب دیفرانسیل که نمونه آن 3409 نفر بود بر اساس وزن‌دهی در سطح گزینه‌های سؤال (درصد محبوبیت گزینه‌ها، نمره فرمولی) و...

متن کامل

تاثیر مدل وزن دهی و نمره کل سازی سوابق تحصیلی بر کارایی گزینش داوطلبان ورود به دانشگاه ها و مراکز آموزش عالی کشور

هدف از پژوهش حاضر شناسایی وزن هریک از دروس سوابق تحصیلی و نمره کل سازی براساس رویکردهای روانسنجی تحلیل عاملی و مدل پیوسته IRT و رویکردهای مبتنی بر نظر متخصصان تاپسیس و AHP،  و همچنین مقایسه اثر مدل وزن دهی بر واریانس، پایایی و روایی پیش بین نمرات کل سوابق تحصیلی بود. روش پژوهش حاضر ترکیبی بود. به منظور اجرای پژوهش در بخش اول 11 آیتم(دروس) سوابق تحصیلی از گروه متخصصان مورد نظرخواهی قرار گرفت و ب...

متن کامل

تاثیر مدل وزن دهی بر نمره کل سازی سوابق تحصیلی و رتبه بندی داوطلبان ورود به دانشگاه ها و مراکز آموزش عالی کشور

هدف از پژوهش حاضر شناسایی وزن هریک از دروس سوابق تحصیلی و نمره کل سازی براساس رویکرد روانسنجی مدل پیوسته IRT و رویکردهای مبتنی بر نظر متخصصان تاپسیس و AHP، و همچنین مقایسه اثر مدل وزن دهی بر رتبه بندی و پایایی روش های وزن دهی و نمره کل سازی سوابق تحصیلی بود. روش پژوهش حاضر ترکیبی بود. به منظور اجرای پژوهش در بخش اول 11 آیتم(دروس) سوابق تحصیلی از گروه متخصصان مورد نظرخواهی قرار گرفت و با استفاده...

متن کامل

نمره دهی به آزمون های تشریحی: روش ها، چالش ها و راهکارها

تاریخ دریافت 03/05/1394 تاریخ پذیرش 26/07/1394 چکیده پیش زمینه و هدف: تحقیقات نشان داده است که یادگیری دانشجویان تحت تأثیر مستقیم روش های ارزشیابی است. به اعتقاد بسیاری از پژوهشگران سؤال های تشریحی روش های برتر یادگیری را برمی انگیزند، اما دراین بین نحوه نمره دهی آزمون های تشریحی چالش بزرگی است که در بسیاری از موارد سبب بی اعتباری نمرات حاصل از آزمون می شود. برخلاف آزمون های عینی که اندازه گیری...

متن کامل

ساخت و رواسازی آزمون تفکر انتقادی: کاربرد نظریه سؤال-پاسخ

مطالعه حاضر با هدف ساخت و رواسازی آزمون تفکر انتقادی با استفاده از نظریه سؤال ـ پاسخ انجام گرفت. بدین‌منظور از بین دانشجویان دانشگاه‌های قم و شیخ مفید، یک نمونه به اندازه (478=n) انتخاب، و پرسشنامه موردنظر با همکاری آن­ها اجرا شد. از بین مدل‌های مختلف در نظریه سوال ـ پاسخ، مدل سه پارامتری مناسب تشخیص داده ‌شد. داده‌ها با کاربرد مدل لوجستیک سه ‌پارامتری تحلیل ‌شد. به‌منظور بررسی مفروضه‌های این ن...

متن کامل

طراحی خزانه‌های سؤال بهینه برای سنجش انطباقی کامپیوتری با در نظر گرفتن امنیت آزمون

سنجش انطباقی کامپیوتری به خزانه‌ سؤالی نیاز دارد که به ‌خوبی طراحی شده و برای ساخت آزمون‌های مجزا، تعداد مناسبی  سؤال‌ داشته باشد. همچنین شامل سؤال‌هایی باشد که از لحاظ محتوایی متعادل باشد و هزینه‌ ساخت آزمون را کاهش دهد. یکی از روش‌های طراحی خزانه‌ سؤال، روش رِکیس است، که در آن از روش مونت‌کارلو برای تعیین ویژگی‌های یک خزانه‌ سؤال بهینه استفاده می‌شود. در این پژوهش، از این روش برای طراحی خزانه‌...

متن کامل

منابع من

با ذخیره ی این منبع در منابع من، دسترسی به آن را برای استفاده های بعدی آسان تر کنید


عنوان ژورنال:
مطالعات اندازه گیری و ارزشیابی آموزشی

جلد ۳، شماره ۴، صفحات ۷۹-۱۰۴

میزبانی شده توسط پلتفرم ابری doprax.com

copyright © 2015-2023